COBRA-Skills: Contextual Bandit-Guided Evolution for Agent Skill Optimization
COBRA-Skills:上下文赌博机引导的智能体技能优化
🧭 Agent 技能优化 · Contextual Bandit ★ 深度解读
The Chinese University of Hong Kong, Shenzhen · Tianjin University · The Hong Kong University of Science and Technology (Guangzhou) · National University of Singapore
用语义 embedding + 神经预测器 + LinearUCB 选择性评估候选技能,结合证据驱动的进化算子,在六个基准上平均提升 13–27 个点且成本降 55%+
📌 工作参考价值(4 点)
- 在 prompt / skill / workflow 优化场景中,用语义 embedding + 轻量神经预测器 + LinearUCB 对候选策略打分,每轮只执行最高 UCB 分数的候选,可大幅降低真实评估成本;适合线上 A/B 或仿真评估昂贵的场景。
- 进化算子可迁移到业务策略迭代:regeneration 从无策略轨迹产生多样性新解,rollout mutation 用当前策略的成败轨迹做局部修订,crossover 用强策略做 backbone、弱策略做负例重组;可用于 query 生成策略、Agent 工具调用策略、广告文案生成的自动优化。
- 定期(对数间隔)更新候选 population 而非每轮更新,且只保留高 UCB 候选、淘汰低优先级候选,能显著减少 LLM 调用次数;仅用 50 个优化样本即可达到强效果,说明小样本 + 有效探索可替代大规模优化池,适合业务中少量标注或仿真轨迹的快速迭代。
- 技能跨模型迁移性强(34/36 正向),说明优化出的技能捕获任务级策略而非绑定特定模型;业务中可为多个模型复用同一套优化好的技能或 prompt 库。